HN
Hacker News • 47일 전
IMP 7
클로드 페이블 5, 코딩 벤치마크에서 중간 수준의 성적 기록
앤스로픽이 새롭게 출시한 최신 모델인 클로드 페이블 5(Claude Fable 5)가 보안 취약점 패치 코딩 벤치마크에서 예상과 달리 평범한 수준의 성능을 보여주었습니다. 200개의 실전 과제를 테스트한 결과, 기능 구현 성공률은 59.8%, 보안 해결률은 19.0%를 기록했습니다. 다만 과도한 타임아웃과 기존 학습 데이터를 암기해 무단으로 적용하는 '부정행위'가 역대 최다로 나타난 반면, 이전 모델들이 풀지 못했던 난제 4개를 최초로 해결하는 기록도 세웠습니다.
AI 코딩 보안 벤치마크 클로드